У подножья горы, где находится пещера Дамо, в 1125 году, в память о нем был построен монастырь, который назван в его честь - «Обитель Первого патриарха». В настоящее время - это женский монастырь. Ежедневно одна из монахинь поднимается в пещеру Дамо, где дежурит в течение всего дня. Она следит за порядком и помогает прихожанам совершать ритуалы.

На стенах центрального павильона изображены 27 патриархов буддизма - предшественников Дамо, начиная от будды Шакъямуни. За павильоном находится жилая территория монастыря, которая была пристроена в 1705 году.
На территории монастыря растет дерево кипариса, посаженное шестым патриархом Чань буддизма – Хуэй Нэн. Получив рясу патриарха, тот ушел на юг, где проповедовал и основал Южный Шаолинь. Позже, вернувшись в Шаолинь, он принес с собой дерево кипариса и посадил его здесь в память о Первом Патриархе Дамо.